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(57) Abstract 

Described is a method 
and device for storing, 
searching for and playing 
back audiovisual data and 
data files, using a multimedia 
multiplexing and multimedia 
control protocol with a control 
unit for the multimedia data 
flow in a separate virtual 
control channel as specified 
in mj-T H.245, widi a data 
multiplexer and demultiplexer 
as specified in ITU-T H.223, 
with a video-compression 
and encoding device and 
a videondecompression and 
decoding device as specified 
in eg. ITU-T H.263. with an 
audio/voice-compression and 
audio/voioe-<lecompression 
device using at least 
one high-compression 

voice<ampression algorithm and with a omtrol unit for the multimedia storage unit in a separate logic cmitrol channel. 
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Beachreibimo; 

VerfcQiren iind Einrichtiing zum Speichem, Suchen \md Abspielen 
von audiovisuellen laf ormatlonen imd Datenfiles 

Die Erfindung betriff t ein Verfahren und eine Einrichtiing zum 
Speichem, Suchen xind Abspielen von audiovisuellen Informa- 
tionen und Datenfiles. Insbesondere betrifft sie somit ein 
Multimedia- Speichergerat . 

Die Speicherung xxnd das Abspielen von Multimediainformationen 
(Video, Audio, Daten, Steuer-Informationen) auf digitalen 
Speichermedien (z.B. CD-ROM, optisch beschreibbare Festplatte, 
magnetische Festplatte) ist eine der wichtigsten Punktionen in 
Mul t imedi a - Sy s t emen . 

Obwohl die KapazitSt der speicherbaren Informationen auf digi- 
talen Speichermedien stStig wSchst, bereitet die groSe Daten- 
menge von Multimedia- Informationen immer noch ein massives 
Speicherproblem . 

Eine erf indungsgemSEe Anordnung erraSglicht gegenuber den bekan- 
nten Verfahren eine wesentlich hdhere Konpression, ein effek- 
tiveres Multiplexing und eine effektivere Steuerung von raulti- 
medialen Datenstromen (s. Tcibelle 1) , 

Dagegen erlaubt das standardisierte Verfahren ISO/IEC 11172 - 
auch als MPEG-l bekcinnt - mit 1,5 Mbits/s die Speicherung von 
ungefahr 1 Stunde audiovisuelle Information auf CD-ROM. Auch 
andere, nicht standardisierte audiovisuelle Konqpressionsver- 
fahren, die in PC-Anwendungen verbreitet sind, ermoglichen bei 
schlechterer Bild- imd Ton-QualitSt ungefShr 1 Stunde 
gespeichertes audiovisuelles Prograram. 
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UocEum: 


Votumen 
(MByte): 


Abspi«Mw«rM32 

RINVS 

OaF (180x144) 
BadauflSsunobei 

HJSS; 
0.723; 

04kbitf8Auilo 


AbspiddMierbdllS 

RDRn 

OF (380 x 288) 
BOdwfldsungbei 

a723; 0.728; 
0.729 Audo 


AbspMdauerbei 

512iibW8 

rriMi 601 (720 x 576) 

Bildwflosungbd 

H.263; 

0.728,0.729; 
0.722 Audio 


Diskette: 


1.4 


^Ma6Mbiul8n 






CD-ROM: 


660 


etwa46Stunden 


etmall Stunden 


etwa 2,5 Stunden 


BeispielDatBi: 


10 


etWB41 Mnuten 






FestplstlB 
/Mnute 




etwa240kBytBAnn 


etwa 1 ^AyyteMn 


etiMa4MbytBftnin 


Beispiel 
Festplatte: 


540 


6tMa38Stuiiden 


etwa 9 Stunden 


etMia 2,25 Stunden 



Tabelle 1 - Beispiele fur ikbspieldauer von auf ITU H.324 



basierenden multiinedialen Speidierlosungen 

Die Qualitat des MPEG-l Videos und der MPEG-1 Audio ist in der 
Regel zwar besser als die in der Tabelle 1 aufgelistete Ver- 
fahren, es gibt jedoch zahlreiche Anwendungen, wo eine verrain- 
derte Video- und Audio-QualitSt vollkonimend ausreicht (z.B. 
Multimedia - Mail, Video-Bilder mit Kopf und Schulter, 
Multimedia- Lexika) . 

Die Erf indung macht sich bedarfsweise - eibhangig von den ein- 
zelnen Realisierungsf ormen \md Besonderheiten - die folgenden 
Informationstechnologie- und/oder Kommunikationstechnologie- 
Standards zunutze: 

• Die in der ITU-T gegenwartige Normierung von Sprachkodierem 
mit sehr niedriger Bitraten fiir das Bildf emsprechen (ITU-T 
G.723) im of f entlichen Telef onwAhlnetz (GSTN) fuhrt zu 
quali-tativ gut en Sprachkodierem (annahemd der QualiteLt 
der CCITT G.726 Erapf ehlung) mit Ubertragungsgeschwindigkeit 
von 5,3-6,3 kbit/s. Auch der ITU-T G. 729-Sprachkoder 
ermoglicht eine digitale Sprachtibertragung mit 8 kbit/s 
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Geschwindigkeit , In der Zukxinft wird auch ein 4 kbit/s Coder 
stcindardisiert (ITU-T G.4kbit/s) . Diese Codecs sind derzeit 
die leisxxngsflLhigsten Sprachcodecs . 

• Die in der gegenwartige ITU-T-Normierxing von Bewegtbild- 
kodierem mit sehr niedriger Bitraten z.B, fur das Bildfem- 
sprechen im offentlichen Telef onwShlnetz (ITU-T H.263) fuhrt 
zu qualitativ guten Bewegtbildkodierem (QCIF Aufldsung 180 
X 144 und weniger) mit der minimal benStigten 
Ubertragungsge-schwindigkeit von 8-24 kbit/s (bzw. hdher) , 
die eine ge-sicherte Ubertragungsart (z.B. mit ITU-T H.223) 
erfordem. Eine Erh6hung der Bildauf Idsung uber die im 
Standard defi-nierten Werte z.B. auf CIF (360 x 288) Oder 
ITU-T 601 (720 X 576) erlaxibt die Ubertragung von 
Bewegtbilder mit Femsehen- bzw. Bewegtbilder gemcLS der 
Aufl6sxing der digitaler Studio-Norm ITU-R 601. 

• Die gegenwcLrtige Normierung in der ITU-T von Multiplexing 
von audiovisuellen Datenarten mit sehr niedriger Bitraten 
z.B. fur das Bildfemsprechen im 6ffentlichen 

Telef onwShlnetzen mit Ubertragungsgeschwindigkeit von 9,6-32 
kbit/s (und hoher) , die eine gesicherte Ubertragungsart 
(ITU-T H.223 gemafi) ermSglicht. Dieses Prinzip kann auch fur 
Spei Cher -syst erne angewendet werden. 

• Die gegenwartige ITU-T-Normierting (ITU-T H.245) bezuglich 
dem Steuem von audiovisuellen Datenarten mit sehr niedriger 
Bit-raten, beispielsweise fur das Bildfemsprechen im 

6f fentli-chen Telef onwAhlnetzen, die eine flexible Zuordnung 
von bis zu 15 xinabhSngigen Nutzkanalen, jeweils mit Audio- 
/Sprache-, Video- Oder Dateninformation emSglicht. Dieses 
Prinzip kann auch fur Speichersysteme angewendet werden. 
Jeder Kanal verfugt uber eine flexible Bandbreite, die von 
Anwendung zu Anwendung im Laufe der Speicher-Anwendung 
beliebig variieren kann. 
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Figur 1 zeigt das BlocJcdiagrainm eines Ausfuhrungsbeispiels ei- 
nes erfindungsgernSfien Multimedia-Speichersystems. 

Bin Multitnediales-Speichersystem besteht aus raehreren Punk- 
tionseinheiten. Die Video-I/O-GerSte (Input/Output) enthalten 
z.B. eine Kamera, einen Bildschirm und eine Bildaufbereitimgs- 
einheit fur das Einblenden von mehreren Bildem ("split- 
screen") . In einer gunstigen Ausgestaltung kSnnen alle Gerate 
tatsAchlich angeschlossen werden. Die Audio/Sprach-I/O-GerSte 
schlieSen das Mikrofon (cxier mehrere) , den Lautsprecher (Oder 
mehrere) , und die Audio/Sprachaufbereitungs-einheit (z.B, fur 
Bchounterdriickung) ein. Auch hier kSnnen in einer gunstigen 
Ausgestaltung alle Gerate tatsSchlich amgeschlossen sein. Die 
Systemsteuerung steuert das Gesamtsystem, d.h., sie sorgt fur 
die Multimedia-Steuerung fur den Multimedia-Multiplexer \ind fur 
die gesamte Multimedia-System-Steuerung. Der Video-Codec sorgt 
fur die digitale KoTi5)ression \md Dekoti5)ression des Videosignals 
beim Video-Enkoder bzw. Video -Dekoder, Der Audio/ Sprach- Codec 
sorgt fur die digitale Konpression/Dekortpression des Au- 
dio/Sprachsignals. Eine wahlweise Verz6gerung des Sprachsignals 
kann vorgenoinmen werden urn die Lippen-synchronisation zwischen 
Video und Sprache zu erreichen. Der Multiplexer/Demultiplexer 
legt beim multimedialen Abspeichem die Audio-, Video- und 
Datensignale in einem gemeinsamen Datenstrom zusammen, bzw. 
trennt beim Abruf aus der multimedialen Datenbank den gemeinsa- 
men multimedialen Datenstrom in getrennte Audio- , Video- und 
Datensignale auf . 

Die System- St euerxing besteht aus der Steuerung des Multimedia- 
Multiplexing (nach ITU-T H.245) , vmd des gesamt Multimedia- 
Spechersystems (z.B. Laden/Beenden des Multimedia Speicher 
Programms im Rechner) . 

Bei dera Multimedia-Multiplexing nach ITU-T H.245 kann man bis 
zu 15 Nutz-Kanale er6ffnen und benutzen. Vor dem Abspeichem 
der Nutzkanale erfolgt nach H.245 eine Aushandlung und Ein- 
stellung der Benutzerparameter . Dcibei signalisiert der Daten- 
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Speicher die breiteste Mdglichkeit der Speicherung von multi- 
medialen Inforrnationen, und die speichemde Anwendung ent- 
scheidet letztendlich und wcLhlt aus, welche multimedialen 
Kcui&le erdffnet werden sollen und wie die multimediale Spei- 
cherung in den Daten- Speicher erfolgen soli. 

Bei der Speicherung einer audiovisueller Nachricht (" Voice - 
Mail") konnten beispielsweise ein Kanal fur Video, ein Kanal 
fur Sprache, ein DatenJcanal fur die "Voice-Mail" Steuerung 
(Address ierung, Zeit des "Voice-Mails" Ablegens u.s.w,) und das 
obligatorische ITU-T H.245 Multimedia- Steuerkanal er6ffnet 
werden . 

Bei der Speicherung eines audiovisuellen deutsch-f ranzosischen 
Sprachkurses konnten beispielsweise ein Kanal fur Video, je ein 
Kanal fur Ton in deutscher und in f ranzosischer Sprache, je ein 
Datenkanal Kanal fur den deutschen und fur den f ranz6sischen 
Begleit-Text, ein Daten- Kanal fur die Sprachkurs-Progrannn- 
Steuerung, und ders obligatorische ITU-T H.245 Multimedia- 
Steuerkcuial erdffnet werden. 

Bei der Speicherung einer Sportf ilm-Sequenz (z.B. Pufiball) 
kdnnte beispielsweise zunAchst ein Kanal dem Ton und ein Kanal 
dem Bild zugeomet werden. Nach einem Tor z.B. kdnnten z.B. 
kurzfristig funf Kanale fur Video zugeordnet werden. Jedem 
Kanal wird eine andere Kameraeinstellung zugewiesen. Dadurch 
kdnnte der Anwender beim Abspielen dynamisch eine beliebige 
Kameraeinstellung (z.B. von oben, aus der Torpespektive, von 
hinten, von der Seite) ausw&hlen. 

Auch vor dem Abspielen der NutzkauiSle erf olgt ein Aushandeln 
xind Einstellen der Benutzerparameter nach ITU-T H.245. Dabei 
signalisiert der Daten- Speicher die breitest mogliche Speiche- 
rung von multimedialen Inf ormationen. Auch hier trifft letzt- 
endlich die abspielende Anwendung (d.h. das Multimedia Spei- 
chersystem) die Auswahl der zu er6ffnenden Multimedia-KanSle 
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und legt fest, wie das raultimediale Abspielen aus dem Daten- 
Speicher erf olgen soil . 

Das Multimedia-Multiplexing ist in Figur 2 dargestellt. Die 
unterste Schicht PS ist die physikalische Schicht. Diese wird 
im Rechner-Bus, der Schnittstelle zwischen detn extemen Digi- 
tal-Speicher (CD-ROM, Festplatte usw.) und dem Multimedia- 
Multiplexing, realisiert. Der Multiplexer (ahnlich ITU-T H.223, 
mit dem Unterschied, daS multimediale Daten nicht fQr ein 
analoges Telefonnetz, sondem fur den BUS eines Rechners be- 
reitgestellt werden) verfugt liber zwei Schichten: Eine sog. 
Adaptations -Schicht ("Adaptation Layer") AL und eine Multiplex- 
Schicht ("Multiplex Layer") ML. Die Adaptations-Schicht AL ist 
zustandig fur die Anpassung der diversen Inf ormationsstr6me - 
die von den verschieden Media-Quellen (Video, Audio/ Spr ache, 
Daten) stammen - an die Multiplex -Schicht ML. In Figur 2 sind 
vier Adaptations -Schichten AL spezifiert, eine Daten-Adapta- 
tionsschicht ("Data Adaptation Layer") DAL, eine Audio/Sprach- 
Adaptat ions -Schicht ("Audio Adaptation Layer") AiiAL, eine Video 
Adaptations Schicht ("Video Adaptation Layer") VAL und eine 
Steuerungs -Adaptations -Schicht ("Control Adaptation Layer) CAL 
zur Ubertragung von Multimedia-Steuerdaten. Jede Adaptations 
Schicht bedient sich in der Multiplex-Schicht ML den Diensten 
einer sog. Konvergenzunterschicht ("Convergence Sublayer") CS 
und einer sog. Segmentierungs/Zusammensetungs-Unterschicht 
("Segmentation and Reassembly Sublayer") SARS. Die Konvergenz- 
unterschicht CS sorgt tHr Fehlerer)cennung und fur die Fehler- 
korrektur. Die Segmentierungs/Zusammensetungs-Unterschicht SARS 
sorgt fur die Fregmentierung der Datenstr6me in sog. SAR-SDUs 
("SDU - Service Data Unit"), zugeschnitten fur die Multiplex- 
Schicht ML. 

Uber der Video-Adaptionsschicht AL bef indet sich der Video- 
Codec (Video) der die Video- Inf ormationen codiert bzw. 
decodiert. Uber der Audio-Adaptionsschicht AL bef indet sich der 
Audio-Codec (Audio) der die Audio- Inf ormationen codiert bzw. 
decodiert. Uber der Daten-Adaptionsschicht AL (Daten) befinden 
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sich die fur die Datenanwendung notwendigen Datenprotokolle. 
Bin spezieller Datenkcinal ist den ITU-T H.245-Multimedia- 
Steuerungs-Protokollen zugeordnet. 

Die Adaptionsschichten AL zeigen beitn Speichem Ubertragxings- 
fehler an, es werden Pehlerkorrekturen vercuilafit. Ferner 
fragmentieren die Adaptionsschicht AL die Inf ormationsstrSme in 
kleinere Einheiten, Die Multiplex-Schicht ML sorgt fur das 
Multiplexen der verschieden Inf ormationstypen, die von den 
Adaptionsschichten AL vorbereitet werden. 

Die Multiplex-Schicht ML sorgt beim Zugreifen/Abspielen fur das 
Demultiplexing des angekommenen Datenstromes in Datenf ragmente 
der verschiedenen Informationsstypen, die an die jeweils zu- 
st^dige Adaptionsschicht AL weitergeleitet werden. Die Adap- 
tionsschichten AL setzen aus den Datenf ragmenten die einzelnen 
Datenstrome zusammen, die cux die Anwendungen (Sprache /Audio, 
Video, Daten, Multimedia Steuerung) weitergeleitet werden. 
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Pateatanaprflche 

1. Verfahren zum Speichem, Suchen und Abspielen von hochkom- 
primierten audiovisuellen Inf orrnationen und Datenf lies eines 
Multimedia- Speichergerates unter Verwendung eines Multimedia- 
Multiplexing- xmd Multimedia-Steuerungs-Protokiolls mit den 
folgenden Verf ahrensschritten: 

a) Multimedia- Inf ormationstrdme werden in einem ersten sepa- 
raten virtuellen Steuerkanal gemiS ITU-T H.245 zum Ermdglichen 
von flexibler Zuordnung und gleichzeitiger Behandlxxng von 
mehreren Audio/Sprach, Video und Datenkanalen fur Multimedia 
Komtminikation gesteuert; 

b) Video- \xnd/oder Audio/Sprach- und/oder Dateninf ormationen 
und/oder Steuerinf ormation werden zum Brm&glichen flexibler 
Zuordnung von Ranalkapazit&ten entsprechend der momentanen 
Bedurfnisse der beim gencuanten Steuem zugeordneten Kan&le nach 
ITU-T H.223 gemultiplext bzw. demultiplext ; 

c) Videosignale werden - vorzugsweise gem&E ITU-T H.263 - 
koraprimiert und kodiert, bzw. dekornprimiert und dekodiert; 

d) die Audio- bzw. Sprachsignale werden unter Verwendung eines 
hochkomprimierenden Sprachkompressionsalgorithmus komprimiert 
bzw . dekonqprimiert ; 

e) das Multimedia-SpeichergerSt wird uber einen zweiten 
separaten virtuellen Steuerkanal gesteuert. 

2. Einrichtung zum Speichem, Suchen und Abspielen von hoch- 
koraprimierten audiovisuellen Inf ormationen und Datenfiles eines 
Multimedia-Speichergerates unter Verwendung eines Multimedia- 
Multiplexing- und Multimedia-Steuerungs-Protokolls, 

- mit einer Inf ormationsstromsteuerung zum Steuem der Multi- 
media- Inf orma-tionstrdme in einem separaten virtuellen Steuer- 
kanal gemas ITU-T H.245, um eine flexible Zuordnung und die 
gleichzeitige Behandlung mehrerer Audio/Sprach-, Video- und 
DatenkancLle fur Multimedia Komrminikation zu ermoglichen; 
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- mit einem Multiplexer und Demultiplexer zum Multiplexen bzw. 
Deraultiplexen von Video- xind/oder Audib/Sprach- und/cxier Daten- 
informationen und/oder Steuerinf ormation nach ITU-T H.223, um 
eine flexible Zuordnung von Kanalkapazit&ten entsprechend der 
tnomentanen Bedurfnisse der durch die geneumte Steuerung 
zugeordneten Kan&le zu ermdglichen; 

- mit einer Videokoinpressions- und Kodierungsvorrichtung zum 
Kott5)rimieren und Kodieren und mit einer Video-DekonqpresBions- 
und Dekodierungsvorrichtiing zxim Dekon5)rimieren und Dekodieren 
von Videosignalen vorzugsweise gemcLE ITU-T H.263; 

- mit einer Audio/Sprachkompressions- und Audio/Sprachdekom- 
pressionsvorrichtung zum Komprimieren bzw. Dekonqprimieren von 
Audio- bzw. Sprachsignalen mit einem hochkoioprimierenden 
Sprachkompressionsaigorithmus ; und 

- mit einer GerStesteuerung zum Steuem des Multimedia-Spei- 
cherger&ts Hber einen weiteren separaten logischen Steuerkanal. 

3. Einrichtung nach Anspruch 2, dadurch gekennzeichnet, da& 

der zweite separate virtuelle Steuerkanal ein zus&tzlich er6ff- 
neter virtueller Datenkanal gemSfi ITU-T H.245 ist. 

4. Einrichtung nach einem der Anspruche 2 und 3, dadurch ge- 
keuxzeichnet, (ia& die Audio/Sprachkotiqpressions- iind Audio/ 
Sprachdekott5)ressionsvorrichtung mindestens mit einem Sprach- 
kompressionsaigorithmus nach ITU-T G. 723.1, ITU-T G.729, ITU-T 
G.728, ITU-T G.722, ISO/IEC 11172-3 Oder nach ITU-T G.4kbit/s 
betreibbar ist. 

5. Einrichtung nach einem der Anspruche 2 bis 4, dadurch ge* 
kennzeichnet, dafi das Multimedia-SpeichergerSt durch einen 
Computer mit magnetischem Pestplattenspeicher realisiert ist. 

6. Einrichtung nach einem der Anspruche 2 bis 4, dadurch ge- 
kennzeichnet, daS das Multimedia- Speicherger^t ein Conputer mit 
einer nur lesenden optischen Speichereinrichtiing ist. 
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7. Einrichtiing nach einem der Anspruche 2 bis 4, dadurcb ge- 
kexuzeichnet , daS das Multimedia- Speichergerdt ein Cociqputer mit 
einer schreibenden und lesenden optischen Speichereinrichtung 
ist . 
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